（来源：上观新闻）
AI比你📩强就是比你强，没👙有太多可以争辩的🤱空间💕。例如： 🔗🍨“的” → 单独😒1个token 💷“中国”👨👨👦 → 1个t🍴oken（🇪🇺高频组🧝♀️合） 🖱“人工智能🇫🇷” → 🕷2个t🍀🕓oken（“人工🗣✅”+“智能”） ↩🖥单个生僻字和👩🎨🦷长词被拆解成多个👚词元 对于低频字🈚🇮🇳或专业术🍉语，BPE算法🕝缺乏足🧜♂️🚆够的合并🏙动力，只🎱🦞能拆分为⚱基础字符甚至UT💱F-8🇮🇳字节： “薹🧬🔴”（生僻◾字）→ 可🦄🇩🇿能被拆🇰🇮为2-3个tok🇱🇮久久动态图en “意大利薄🐭底萨拉斯米😑肠披萨” →🤹♂️👨🎤 可能🦹♀️☔被拆为10🏊+个t🇧🇼oken☠🇧🇶 这种差异🥌直接体现🕛🇦🇲在计费上🇲🇬🇸🇮。
不是因🧚♀️为它不重要，而是🇳🇿因为它在当前👨🏭的话语结👨🦱构中被🆑🤫预设为一⏲个不可问的问🇨🇾🆎题📨。第二个方🎍🇸🇾面过去我们比🇧🇻◽较重视用事后个🕳🤾♀️案性的反垄断🦐法，但现在一🇳🇨🛁些经济体如👾⏸欧盟已经开🐄👨🔧始事前事中性的监🛃🈳管，这就很👓🦝类似把它们当做类💁♂️🍛公用设施🇲🇰🇳🇵的立场🇾🇪。有时候晚上🔴10点或1🚌1点多，6️⃣🇧🇸向晶突然想起☹一个问题，随🐿时跟AI聊🥈🦜一聊，⚰也不用担心是📃👨⚖️否造成🕥🇵🇷打扰🇩🇴🛑。与这位🆗大厂打工🔟🕗人的纠🦙👨🦲结相呼应🏴的是，🧳过去两周🐞里github⚫上有两类sk😢🗨ill在同时👹😚流行🇻🇨🐐。然而，一些人担🇮🇩🛸心长期协议可能会🏘🦟加剧存🐏🍹储器半导体市🍂场的两极分化🌾。到12月，🇨🇭🌶整个产品推🇸🇲翻重来，围绕 🧖♂️Agent📊 App 模👩💻🛷型重建🕧🌊。
